假如音乐人的乐器可以演奏音乐也演奏出动画 | 音画联觉

作为大部分现场演奏必不可少的装备

MIDI乐器和MIDI控制器一定程度上解放了乐器对音乐人的束缚

但是这些设备发出的演奏和控制信号一直都是发送给音频软件来控制和输出声音

并没有对应的实时交互动画系统去利用这些信号来生成演出视频

而当下音乐现场演出对视觉的要求越来越高

以至于单纯的背景视频已经无法满足了

于是我们做了一个小实验

用Procesing语言开发了一款小程序

截取并解析Seaboard Block的MIDI信号

制定一系列数学公式

把MIDI信号放入数学公式

计算并绘制出动态图形绘制在屏幕上

因为使用的设备是Seaboard，采用MPE标准的MIDI信号，而且制造厂商Roli公司给的开发资料还严重不足，所以开发过程中解析信号花费了一番时间

如果不太清楚Processing，MPE和Seaboard，请看👇这两篇文章

结果如下

单次弹奏动作生成一个随机多边形，同时在一定范围内排斥噪声流畅粒子

根据按压变化大小

https://v.qq.com/txp/iframe/player.html?width=500&height=375&auto=0&vid=m13389p2ghb

多点操作

https://v.qq.com/txp/iframe/player.html?width=500&height=375&auto=0&vid=k13389ljgzl

用宜家玻璃杯暴力测试系统效率和稳定性

完整视频👇

https://v.qq.com/txp/iframe/player.html?width=500&height=375&auto=0&vid=q064218hd3v

—END—

我们的工作是探索编程和数学在艺术和设计中一切可能性，形式不限，艺术创作，跨界合作，展览展示，品牌活动等等，同时我们的使命是建设和维护中国本土创意编程和算法艺术社群，形式有开展线上教学，举办社群活动，策划举办艺术展览，挖掘发现本地社群里值得被传播的人和事通过自媒体进行传播

我们建了一个读者群

想进群和其他读者进行精神交流朋友

加客服小姐姐的微信（推送末尾）

联 系 我 们

算法艺术实验室

探索数学与编程在设计与艺术中一切之可能

用运算和美学让你变更酷

主营业务

科学艺术咨询 | 公共艺术 | 未来舞台美术 | 大数据可视化 | 设计人才猎头 | 品牌Event | 教育